AutoRubric-T2I: Robust Rule-Based Reward Model for Text-to-Image Alignment
AutoRubric-T2I:基于自动规则学习的可解释 T2I 奖励模型
🧭 自动规则学习构建可解释 VLM 奖励模型
University of California, Los Angeles · Arena
自动从少量偏好对合成判别规则构建 VLM 法官,仅用 0.01% 标注数据超越强基线
📌 工作参考价值(4 点)
- 用极少偏好对(<0.01% 标注数据)自动合成评估规则,结合 L1 正则化逻辑回归筛选 Top 判别规则,大幅降低奖励模型训练成本,可用于电商多模态评估(如商品图与描述的对齐检测)。
- VLM 法官通过显式 rubrics 打分,提供细粒度、可解释的奖励信号,适合需审计和调试的生成式推荐场景(例如解释为什么某张生成商品图更符合描述)。
- 框架可泛化:用 LLM 从用户反馈中自动提取评估维度,再通过特征选择保留关键维度,在推荐系统中构建可解释的用户偏好奖励模型。
- ℓ1-Regularized Logistic Regression Refiner 作为通用的特征选择 trick,可迁移到任何需要从大量候选指标中筛选最有区分力维度的任务(例如从评论关键词中提取影响点击/转化的核心因子)。